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Sxammary of DE 195 37 010 Al 

DE 195 37 010 Al concerns a learning method and device for 
simulating a dynamic process by simultaneous learning of at 
least two time series each of which representing different 
process parameters. For each parameter of the process, a 
particular learning component is provided which bases on 
process data of the past. An optimum learning result is 
obtained by a decorrelation technique. 

DE 195 37 010 Al represents technological background with 
regard to the use of neural networks. It does not disclose a 
method for detecting the modes of a dynamic system with a 
drift segmentation model as claimed in the above U.S. patent 
application . 
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PrQfungaantrag gem. 1 44 PatG Ist gestellt 

@ Lamvarfahren und -anordnung zur Nacht>adung eines dynffltiiachen Frozasses duich gemeinaamaa Ertaman 
von mindeatena zwei Zeitreihen, welche jeweISs varachledene Proze&obsarvabJe darsteHen 

@ Lamvarfahren und -anordnung zur Nachb9dung ainaa. 
dynamiaohan PrDzaaaaa durch gamainaamaa Ertaman von 
mindeatana zwal Zaitraihdn, walcha iaweila varacHiadana 
Pnaa&obaarvabla darstaUan. 

Mit dar Eifindung aina nauardga Anordnung und ain 
nauartigaa Umwrfahren lur Naohbildung kompiexar Pro- 
zasaa angagaban. POr Jada ObaarvabJa daa Prozassaa wlrd 
aina eigana lamfihiga Komponanta taraitgaetailt, dar (adig- 
llch Varganganheitawarta dar varwandatan Baobaahtunga* 
grc8en zugafQhrt warden* Oleaar Vorgang wtrd dureh dia 
g^hlta Anordnuzig untaratOtzt EIn optfraalaa Lamargabnia 
yM arzlaftt indam bairn Trttfning die jawailiga Gaganwarta- 
komponanta von Ihren Varganganhaftawartan und danan der 
^ andaran Baobachtungagrotoi optimal dakorrallcTt wrd, 8ai 
^ dar DurchfOhrung daa Varfahrana wfrd aine basondara 
gOnatiga Kostanfunktion angag^»a Auf dar Ardtitakturaai* 
O ta wlrd dam Varfahr^ dadurch Rachming gatragan, daS dla 
^ Gaganwartawarta der Zaitralhan dirafit durcbgaachtafft war- 
dan und ladlgO^ additiv mit der Auaganga^Sa aua dar 
l.am)componanta vadcnQpft werdan. 
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Besdirdbung 

Lemverfahren und -anordimiig zur Hachbildimg eincs dynamiscfaeii Prozesses durch gcmdnsames &imexi 
voa mindestcns zwci Zdtreflicn, wdchc jcwefla vcrsdiiedene Prozefiobservablc darstelleiL 
s DieErfmduQgbeziefatschaaf einaeoartiges Lemverfidncnanddne vortdlhafteAiu^^ 
rung (fieses Lenrverfahiens zur NadiUIdaQg tedmlscher oder biologbdier Prozesse 

Zur Nachahmimg kocufriexer tirfinischer Sys teme werden hiufig lendShcge Komppnenten eingesetz^ urn (fie 
E'rozesse oder Systeme nachbilden zu kQanert Diesen Systemen tst dabei zudgen, daB sb selbsttSdg die 
ProzeSdgenschaften criemcn kdimcn und ach an das Verhaltcn des DacfazubQdsideii Prozesses «np8Hmn- 
to Insfaesondcre werd^ solche Systeme fUr Prozesse eiogesetzi; wddie in bohm Mafie oicfat detennmmtbch sind» 
Oder die im hohen Grad stochastuch wlaufen. Ifiafig wmkn fOr Steuer- luid Regd^inAIeme in diesem 
Ziisammenhang neuronale Netze oder Fuzzy-Regler dngesetEt 

Bei bisfao- gingigm Trainigsverfahrea fSr bei^nelswdse neuronale Netzcg werden dem neurooalen Netz 
Eingangszdtreihen zugefilhrt und die ausgegebenen Werte des Netzes ndt den Emgangswerten veiglidien. Der 
15 Lemerfbtg wird daran gtmessen, isvrietrat sicfa die Auagangswerte den Eingan gaweite a amifihenL Dnrcfa 
gfingige Methoden werden die Gewlchle an den einzdncn Nraronen eines neunmalen Netzes verSndert werden 
mh dne A n p as snn g; also etn Training des Netzes dun^fltiiren zu kfinnen. Weitere Lemverfabrea and derzett 
nicbtbdeamit 

Die der Edindong zugrundeliegende Aufgabe bestefat daixn, cine Lemanofdnnng und ein Verbfaren anzuge- 
70 ben, womttmebrere TOTciaedene Observablen dues Proseesses gemeinsani zur Besttmniung eioer Ausgangsgrft- 
Be dieses Leraverfahrens; bzv. cfieser Lemamirdnung b«trageiL Indwsondere soil durch das erfindungsgemlBe 
Verfiahren achcrgestellt werdcm, dafi nidtt «ne AusgaogsgrSfie sdbstzur Messungdes Lenterfblges herangezo- 
gcn wird. 

Diese Aufeabe ynrd fflr das L eiuvei fa hrm gemaS den Merfcmaien des Patentansprnda 1 usdfiSrdieLBraanr 
oidnunggemflfldcnMerlrmalendetltonlan^irqdm 
Weitertuldungen der Hrimdung ergd)en sidi m 

Ein bcsondcTcr VortdOi des erfindungsgcrafiBcn Vcrfafarens besteht darin, daB zur Bildnng ciner Gegenwarts- 
kompcm^Ue afie Vergangenhett^ooniponeittea von Zettrdben der versduedoisten Ofaservatilen henmgezogen 
woxlen. Besonders vorteaQialt wird dnrcbdie optknale Deknrrdationder Gegenwartswerte von alien Vcigan- 
30 gcnheitawertCT schergesteflt, daB der marimal mCgfiche Leroerfolg dngestellt weiden kamt 

Uin den Rechenftufwand hmm grfiw^^ffng<ijgfffn^gffn Verfabren and bdder Anordnung vt tr mnfnnh^ r^f ir^mtyq 
werden l e dj gBd i <fie Gegenwai inknmponcnten dorcb die F^infedonsaiproxiniatoren YNtndert und (Se Vergan- 
goohcitskomponetttcnim wwentlidicn tmvcrandert an die Ausgangc w^tergegcfaen. 
^ Vortcflhaft werden bdm er&dimgagezndBen Verfeiiren zur einfacfaerm Weiterverarbeittmg uod Nonmoiotg 
35 die ausnigebendm Werte nut ciner zwia!benO und 1 bsndiiiUikten dtffiereazierbaren Funk^ 
einer sigmoiden Funkdm, bearbdtet 

Besooders vorteilhaft kdnnen nack dem erinidnngsgemSfien Verfiliren Obmrable f^a^**^ ausgewtbit wer- 
den, inwieweit de nOtzfiche biftmnalicnien zum LernprozeB des jeweffigea FunkticHuapprGadmatnrs beitragen. 
Etn MaBfPr diese NfltzPnhkeif einer aiAAcaObserrablen ist das KOTektMnsmafib das zwisdien &r und den 
40 anderraObacrrableagdsaldet werden loauLjeweEter dew 

gie f5r dm Lm'uiuwreA <ieB grfitiHimg^gmilBen YgrfiitiTCTig imH »ngr fifff ^f^gs |rgfn§BCT AllO"^™»S^ 

Besonders vortdlbaft wird das erfiodun^gemfiBe Verfaliren mit derangegeboien Slostenfnnktion dnrcbge- 
fOhrt, da sie so wohi das Inibmax-Prinzip bdnhaket als audi die Korrdation bewertet Mit dem Infomaz-Prinzip 
wird indimoa Zusanunenbang skbergestdh, dafi dn Maximum an infornmtjnn yyw d^n Kfn ^ ti g en d*?t V«ylg}t* 
45 iw^bzw.derAnotdnungandieAnsgftiigewettergdeftetwnd 

CTTW? Lcmanordnung^ 

wekhe fOr jede Observnlde F^ifitti gn^ a p iH^ M FPfntionsnrittd zur VerfOgung st^ Dadurdi, daB diesen Ftidc- 
tionsappro simarinnsmitt dn lediglidi die Veigangenheitswerte aOer Obsmrablen zQgefOhrt werdea, wird acbon 
anordnnDgs^tig stcfaa^festdlt daB die Gegenwartswerte und Veigangenheitswerte dekDrrdiert werden fcOn- 
so nen. 

Besonden vorteilhaft wird dn soldier Fui^ctionsapprozim^or n Form eines neuronalen Netzes rea!iden;da 
diese wdteslgdiaid untmudxl and und in beliefaiger Vidfalt audt als Emulatiottsp>rogranune zur Verf&gung 
stdien. 

ImfclgeiidenwinldieErfiadQnganhaiidvonFigurenweit^ 
55 Flg^ Ig^dnBeiipiddnererfindui^gemiBenAnoidnuqgan. 
2 gibt dn Be^d Sr einen teduisdiai Proze& 
Fgg. 3 zeigtBcgpidc der Answtrkimgen des erfindungsgeii^ 
in Fig. 2. 

In Fig: 1 ist etn Beispid ecuer erfindungsgemtSen Lernamminung dargesteUt ^ vomm^gN 23d 6sr 

m ei&dung5gemftBenAnc»dnnngundde$eT^^ 

rung von Zdtrdhen. Be^dswdse werden die zeitEdxen Entwiddongen von Sy^emgrOBen ttUiK dfynanifedwn 
Systems mit HilFe eves muhivariaten Moddls auf unubowadite Wdsc gdont Emgabewerte des Systems and 
beis{Heiswdse (fie MeBwerte mdirerer Olnervablen des betraditeten Systems. Erfindun^gendB wud daraus 
extrafaiert; auf welcbe Weise en ZettrdlieuweiL dner ObservaUen von der dgenen Vd'gangenhe^ und von der 

65 Yergangenhdt wdtgg- ObmvaMer abtei^ Reaittat der erfindungsganiBen Vorgchmsw^ ist dne Ddm- 
rehtion zwisdten der Gegecwart und der Veigangenbdt der betrftd^ 

KomelgtTonen hfiherer Qrdnunj^ also aowohl iineare als audi ddtilhieare Abhftngtgkettea zwisdien den 
gemessenen Observablen ktenen dabd esctrahiert werden. Diese KorrdationsaDatyse gibt betqMfeweise Auf- 
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schlnS darQber, ob wdtm MeSgrOSen anes Systems gegenfiber schon gegebenea Observablen aiKh tatsich- 
itch neue Infoniiadoa dber das betrachtete System Gef ent Vdterhin kaim nacfa dem Lenxvorgang <& extrahi^- 
te Abfaing^gkdt zwischen Gcgenwart und Vergangenheit zur Vorheisage durch die der Zdtrexfaenwerte und 
somit zukficftiger Systemznst&nde verweodet werden. Diese Prognose gestabet adi besonders emfiach, denn die 
FuckdonsappFoximatoren rqirisentimn AbbHcbmgeiip cadi denea sich die Zeitreihen der ObservaHen zeitiich 5 
fortsitwtdcdn. Besocders vorteilhaft kana man das ofindungsgemafie Verfafaren ucd me Anordmmg zor 
DorchfOhnrng des Yeifafarens abo dafflr verwecden, dafi die zeitiidie Ectwkkiimg einer gazuc besdnumen 
S^stemgrdSe eriemt wird, in dem gelemt wird, wie diese GroBe Yon der eigenen Vergangenheit, als aucfa von der 
zusatzlfdier andexr Obsenrabien abhtnigt Zum anderen kdnnen Abhingigkeiten zwisdien den venchiedenen 
Gr5&enerkanat werden. to 

Bes<»iders vortdlliaft wird dizrch das erfindimgsgCT^ e Verfahren and eine Anordnung zudessen Durdiffih- 
rung die Verbisdung von nidlbervachtem Leraen mi multivariater ZeitreOienanalyi^ faergestdlL Damit gestal- 
tet sich erSndim^gemflBe Weise <Ge Simiritanmndefliemng mefarerer SystenigrdBen besonders dnfach. 
bsbesondere wdst das erfindungsgeiDifle Ver&hrra keine Besduizzkung acf Imeare oder nonnal verteilte 
AbMngigkdten zwisdioi doi 2Seitre3ia!wate& aul Weiterfain wird dnrch das eifindangsgeniSSe Verfahren 15 
eine besonders einfadie KosCenfiinktxon znr VerfOgong geateflt, wddie bezO^ch tfarer Anwendong aber eine 
grofie ADgemeinheit aufwwt 

1% Vorteile des erfindmigsgemflfien Ver&hrens bestehen insbesondere darin, d^ es fahig ist Elorreiationen 
beliebiger Art und Ordnong zu eztrahimn. Weiterfain we^ es eine boonders niedrige Binbettongsdimensioa 
auf^ das beifit weniger vergangene Zeitrexhenwerte je verwendeter Observabler, ab bet umvariater Modellie- ^ 
rung suid ndtig. Besonders gOnsdg wird durdi das erfindungsgem&fie Verfefaren der negative Ebflufi von 
MeSrausdien vemundert Weiterfain wird dnrdL das ^findnngsgemifie Verfahrra alle vorfaandene Information 
optunal genctzt, indem sowohl alte zor Verfugung stefaoiden Observables. ds audi beliebig vide zdtverzdgerte 
Werte dicser Observablen bd der Moddfienmg Verwendong finden. 

Im Stand der Tedinik sind die Grundlagen der onivariateii ZeitrdhaunodeOierung mit unflbefwachtem 25 
Lemen in [D595) angegeben. Betspide ztff PhasenraumrekonstrtlEtioii mit ^tverzdg^rtett VariaUen geben 
[SYC91] aa FQr l&erwadite Lemverfahren zur 2kiireihaiana]y5e sind in pLF87] Bd^ide angegeben. Die 
Gnmdlagen zur Heridtung der erGndnngsgemfiB angewandten Kostenfu&fctum ergeben sbh aus [NP94] und 
dem mathemadsdien Eik&rungsteH. Fig. i zetgt das multivariate \fodelI zur Ze^^dbenanalyse am B^pzel 
zwder Observabter und dner jeweils zweii£m«udoQalen Snbettung wird zwd Zeitsduitte in die Vergan- 3o 
genfaeit gesdmit). Die Zdtr^ie der ersten Obsenrabien ist mtt x und <fie der zweiten Observabioi mit y 
bezeidmet Die entsprediendwi Werte der Zdtrdfaen werdm der crfkidang^emiBen Anordnung an den 
J^^goi zugef!lbrt Ddbd Est za beadxt^ daS das erfindungsgemiOe Verfabrai and die er&idungsgemifie 
Anordnung sowohl was die Anzahi der anndtan eingespeisten ObservaUen, als audi was die Hdfae der Qnbet- 
tungsdimendanen in jeder Observablen (Anzafal d^ zeitfich zurSc^egenden Werte]l wddie nidit fOr die ss 
ObservaUen ^di sem mOss^ beO^g awdtert werden kann. Es w«^^ bexspidswdse Vektoren eingege- 
bcn, wddie sidi ana Elementen der MeBre&en der verwendeten Observablen zosammensetzen* Dieses Prinzip 
ist als Methodc der zettverz5gerteii Koordinaten (delay coordinates) oder audi ds Takens-Methode bekannt 
Die Takens-Metfaode ist dabd dne Methode, <fie T^aj^torien des Phasenraums, bzw. deren Dynamik in dn^ 
Etnbetttmgsraum mitteb zeitvmdgerter Koordinat^ zu rekonstrdma Die AnzaU der dazu benCdgten 40 
Werte je ^konstrukticmsvektor ist durch die Einbettungsdnnensioa gegd)en» die wiederum von der Dimension 
des Ffaasenraums bzw. d» Attraktors aitf (lem sidi das System faewegt* b^^ 

hen entsteht 6iex Gesamtvektor dso beispielsweise aus zwd zdt&h auf dnanderfolgenden Wertoi emer x- und 
dner y-Zettrdbe.Iedednzd]ie Observable trtgtdd?dd-f iKonqponentenzumEi^bevefctorbdrWenndihre 
Bdbettungsdimenskxi bezddinet Wdt(s*bia steoert jede Obs<Tirable eine relativ zu den anderen Werten 4S 
neueste K^nponente zum Qngabevektor bd» die 2m fb(genden als Gegenwartdkomponente od^ -wert bezdch- 
net winL EXe Qbrigen, wdter zurflddiegenden Wote werden fan fblgenden Vergangenheitskomponenten oder 
•werte genannt Wie aus Eig. i erkannt werdai kann, bestdtt d^^ l^i^evektor also aus kc-u xt-2 und 
Yt-b sowie Yt-2> Dabd b^idmen xt and yt (Se Gegenwartswerte, wihraid Xt-i, Xt^z und yt-i, Yt-3 <£e 
VCTgangenhdtswerte reprSsentieren* Die fOr <fie Anwendmig des erfrodungsgemiBen VerEahrens nddge Vie^ 50 
zahl soteho- EIngabevektoren (LemVlVainiagsdatei^ eriifllt man durdi schrittweises Dcrdrwandern jewdb 
gesamter Zdtre^ea Sind beispiebweise die 2^treihendemente aufstdgend mtt f« % % . .« numemrt, dann 
besteht der erste Bettrag cfieser Zettreihe zum Gesamtdngabevektor aus den Qementen 1« 2; 3p der zwdte 
Beitrag bdspieisweise atB den Hementen 3i 4^ der drttte aus 3, 4» 5 usw. Es ist beispiel^^ 
bd AnwenAing des erfindnnpgemaBftn Verfahren^ die Sprtmgiamttg tnnf^rfwlh der Zatrrihe grSBffl' afa Eins zu 55 
^^at Beispielsweise werden alle Eingabewecte, bis auf cSe Jewdls zdtSdi neuesten jeder Ofasovablen, das 
heiBt genau de Vergangenhdtswerte out emer bdsp ! dswdsc sigmoiden Obertragungsfunktion 



auf den Berddi zwisdien Null und Ens besdirankt, ansonsten aber unverandert ausgegeben. £s kaxm dafOr al>er 
audi jede beKebige andere zwisdien 0 und 1 besduinkte difierettzi»bare Funktion verwendet werden. Dfe 
Gegenwartskomponenten werden zu den Funktionsw^ten von Funktionsapproximatoren Fu Fj addlert die 65 
sowohl von den Vergangenheitswerten der jeweils dgenen Zdtrdhe, als audi von denjenigen der ilbr^ra 
Zehreihen abhfingen. Dabd wird dcrdi das erfindnngsgemflBe Verfahrra und die Anordnung s^ergestellt, daB 
kem ZdtreBienwert BnfluB hat auf <& von ihm aus gesetum zettluA zurOddiegenden Werte. B^ondm die 



Kausa&tfit des oiodcSerteii Prozesses bidbt damh audi im Modell erbalten. Die FtnktUHisa(q)ro3dziiatx3rax 
approodinieren cSe Abbiidanssvorsdirif ten. welche dea zatidsea Entwiddnnseii der Zdtreihea zugrundefi^eiL 
FQr jede Zdtreflie g3)t es bdsiiktsweae einea sotehen ApproadiDBton Hier ist fOr die x-Zdtrdhe ia 1 dcr 
Fuiibbiittppn>xiniatorniitFi undHir <Bey-Zdtrdheder Fimkttonsa^ 
5 wdse kam fOr jedai <Swsr Pankliops a|H« t »am afa^^ seorcHiales Netz verwendet werdea. Es sind 

afaerauch durchans anderQ lernffiluge Kontponeoten mdtesem Zasammeohangdenkbar. Nach dcm erfindungs- 
gmiBen Veiii&ra werdes cfie firin Par^^ 

K^lrtionCTi hffft fhnm ffn, iferativ lirfnlgg dcr MlntntTfinmg taner Kog lfflifiinkti n n immcT b^CT apgawiBt Es Bqgt 
also dn Leravorgang vor. De^ct Lmnnorgang wird im folgexidea anhand dnes Bds{nds wehercrUiitcrt 
10 Nadi der Soimnation der Gcgenwartskompoztaite mh der Aii^abe des znigdi^igen Pankdonsapproxiina- 
torSfinFl^limtemem + gckcmrzddmct, erfolgt audi hier beiqHebwdse db n irhtlineare TVanrfonnation mit 
der bd^ielsweise sigmoiden ObertragUDgsfunktiaii, veldie mm jedodi emen variaUea Parametv cc enthilt: 

« (2) 

Bdm erSodungsgemflfien Verbhren werxlea die vecsddedeiieti Qngabevekioren bdspielswdse als Reafisie- 
ningen dnes stoduudsdien P tqgs esses aU^gdaSt and prodoziereti als aoldie audi cine Wahrsdi dn lidrfceitsyer- 

20 teOimg am Auagang; wddie durdi (fie Eingangsvertdlung indudert winL In Fig. 1 sind die AusgSnge mit z 
bezcKfanet Der Vektor, der die An^gaben w der absdriieBeaden ludit Bne ar en IWnsfonnadon dnrdi die 
MgiwrtiAi Obertragmigsfimktioa entfail^ hdBt im fblgeodesi potibtynapdsches PotenlkL ^ den Formdn im 
matbematisdieit ErUanmgstefl nnd in Fig, 1 wird es mit dem mathefliatisdien Symbol n bezddmet Sdne 
Kompoaenten laaten te* Diejenigea Kamponenten des postsynaptbdiea Potenttah; die von den Vei^angen- 

25 hdtsmrten abhai^ren, reproduderen dfe EiogangsvertdUnig. Nor cSe VerteibiQg derjenigea Komponeoten des 
postsynaptisdieiL Potentials, wddie voa den Gegeu wai ldU jii i pon e n t en der ZdtreSie hanrdhren, werden. nadi 
dem erfindimgsgemSfien VerfafaFen dnrdi ifaren jeweSigcn I^niktionsapprozimator beeuoftnSt Falls den zeitll* 

30 Abhingigkdten zwisdien den vosdiiedmai Zdtrdhen. Etn MaB fOr (fie statistisdie AbhSngi^cdt ist (fie 
Xt ^rmAnm ^mr ^rff^rxMntm (nittlrirfhnmriftnalgn) Vertgiiflng. Dtesg Abhitn g g gkdten liegen audi in der Anawr 
bevertdlong vor. mmimftlg Redundanz bt erreicht, wenn die Kinzelknmponenten vondnander statistisdi 
T ny i ! WipC^g lygnrf, nmrh rtatfertwehe DrfefwTrfatMMt da* m den Gegenwartakompcaienten ydhgrendcn postqnatv 
tisdien Potentiale von den fibrigen Komponenten des postsynaptisdien Potcmliais, wekhe (& Hngabevertei- 

35 lon^ repcoduztereiv fcana onter den gegdbenen Bedmgimgen das Minfannm in der Ausgaberedondanz eneidil 
weiden. Dnrdi das erfindimgsgemftfie Yerfahren vird so sicfaergestdit; daS ein nrndmaler Leroerfo^ bdm 
Training g-zidt wenfep-kamt Dicws R c^^ Tif ^yrriTmiim^ iJTi iift ^m^x^ wenn cCe postsynaptisdien Potentiale der 
fi ff g ff iiuiHi ( ■^Tir#wnp^j»it»i»n konstante Wertc fiefem, also statistisdi gnabhilngig von doi flbrigcn postaynapti* 
scdioi IV>tendaIensmd Die ffitsprediemfenYertdlmtgen mfissen aboS-peakdantellefl. FQr diesen Fall gilt 

40 

xi+Fi(xt^iA-ayt-i«yt-^2)-ci (3) 
4S nnddamit 

Xt «• -Fi(3^-l^t-3^-Ut^2>+Cl (5) 

yt - -F2(xt-LXt-«-iiart-^+ci (e) 

Dif Rmrtfcf mitawn Plr ^ ffrfin Amggggtngge imflberwafAte L ei ii v ei fehren nmfl also ztt Rccimdai Pininimfe - 
rung fOhrts. Denn ana Fonnd 3 wird dentOdi, daB cfie Ftoktionsa{^)radmatonm znr Eriangimg mnrimde r 
Rednndaoz die funkttonalen Abhdngigkdten rqrisenderen mfissoL bfdge des Dekorrdationivorgangcs wer> 
dm M^di Fimktionen eriialten. weldie (fie zeitfi^ 

betiaditeten Bdspid in Fig. 1 also Fi mid F^ Mit (fiesen Rrnktionen wird (Be ansdifiefiende Vorberage 
-Ttilrfliifr igw 7j"itmTii!Twiiggrte grmfigfidtt ZosateBch ttMiB beispidswdse (fie im Moddl flbqtragcne Information 
maximicrt werdea^inabef's bdbmaz-Prinztp [UoB8[]). Ais zu maxinueraide Fanktioi«» wddie beUe Anforde- 
nmgoi giff K Tf^wt ig ^Nrftint w?ntj ^trfjfyff iing^giHngBgn V#!rfaltrgH wirMtgegrekg fnlgendcr TcnHL verweodet; 

k 

DlCTfrTmn fft^ ^ guniiar^J ^li»r-Dtrtm gwnehen rnnlrirftmcngo nder postsvnaptttcher Pl>teUlahpg- 

tdhmg mid dem Pro(hiIct der Ablettimg der ObertragimgrftB^^ 
P^fcthwi j^egsbendui'cfa 
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f(x).crf(xXl"fX^)) (8) 

dar. Zur Maxmiierang der Gleidumg 7» bzw; Nfinimienmg der Gleidinng % also sowohl tot Ccwichlsadapdoa 
beispieisweise der nearonalen Netze, weldie die dnzehieii Funktbiis^rofidinatcKien bSden, ab audi fik die 
Optimiening der Parast^er ai nod ai der Obertragongsfuniction^ fDr cfie mit icm Gcg^iwartskomponeatea 
korre^ndierenden Aasgaben* kam beis;»dswdse Alopex {XJV94]^ ein Standardoptimierungsverf^en f&- 
neurcmle Netze verw^et werden. Bd der Implem^tierung QBt sich als Approximadoa fOr das Integral bus 
deichtmg 7 die Summe i 



-Lfh (9) 

verwendexu die daxm a!s Kostanfunktion im o&idiingsgemd&eii Yerfaixren mimmiert vrird. Daxin bedeotet p die 
Aozafalcter Aasgabew«rte;faiermdiesemBelspielp ^ S^MdieAmBUder&igabeniusterundh^bzv.hf'^ 
multi- bzw. emdimensioftale postsynaptisdie Potential, welches vom m-t^ Muster erzeugt wurde. Die multidi- 
mensionaie Didite 7 wird b^iriebweise mit I&tograimnen dmrh BoxoountiDg geschttzt: 



nA-)=j^-2Z (10) 

wobd M wieder de Anzahl do* Qngabomister ]fit;H^ das postsynapdscbe EVjtentiai, das vomm-ten Eingabenni- 
ster eniengt wild, and ZZ (Se Anz^ der Ponit^imWl!^ 'bezeidm^ der den Wert b^'eatbdltNGt list 
dartn die ElantenlSnge des WQrfds benannt Dies^moiden FdnlE^o&en» wekjie auf die postsynapttschen Pbten- 
tiaIeangewmietwerd»isnidiaFlfi^l am Betspidvonzt mitSIbezeidmet IMe Wirkcmgd^ 
erfiosdimgsganiBen Veifalurens nnd der erfii^^ 

Ab tedmischer ProzeB wird bdspiebweise dn Beispiel ass der StrOmuDgsd^roaimkr das Tayior-Couette-Sy^ 
Stan gezeigt Das Ts^k)r-Cotzette-Systeni bestefat ans zwd koaxialen Krdsz^indem Zl tind Z2, deren Zwi- 
srhenraum mit ffn^ ^ypg^g^ ggfHlIt ki Her irmere ^ylmdgr Zl mdgt nm cfie gemenisame Adiseiar!^2mit 
GA bezddmet mid venirsadit damh ab einer bestiinmten Drebzabl» die Rotatioa at diirdi einen Pfdl R 
symbdisiBrt, das VHdaog statio&arer gegenstcnig roderender Taybr-WnteL In Fig. 2 sind (fiese 'Hiylor-Wtrbd 
als KS gekennzddmet Der iuBere Zyfiioder ist 2ur Veransdiaulidiung des Zu?anfimcnhanges hicr durdsskhtig 
dargesteUt Bei diesem Bdspiei wird von eineni Zustand statbnirer Tayfor-Wtrbel mit Iddit aiKgd^et^ 
Turbcdenz ausgegangen. Das Bds|rid verdc^tdidit die Oberlegoihett rndtivariater ModeIfierun& liier am Bd- 
spid der Verwendtmg dner zwei^ Zeideifae, gegenfiber miivariater Mode^ 

Befimd werden zwd ZettreSien durdi Messung a^daier Gesdtwim^keitdwmponesten an den Wtrbeln A uisd B 
gewofmen. Diese faeiden Observablen fHhren zu rwd versdiiedenen Zeitr^en im folgenden ebenfolk mit A 
bzw. B bezek:bi»t Der Ergelmisse des e^ndungsg^naSen Vdfabrens sind fOr die zwei vendnedenen Observa- 
blen in 3 imtereioander da^teSt Zur Darstdlung der Ergebnxsse werden die Zdtrethen sowohl einzdn^ 
als audi simdtan dekorrefiert IHe Moddlienmg ndt einer Zdtrohe, muvariat bedeotet, d^ dem zur jewdfigen 
Zeitre9ie geiAreiKlen Funkttonsai^roximator nor cfie Vergangenhdtswerte der e^neti Zdtrdfae znr VerfO- 
gtmg gestellt wurden. Oberkreuzkorrdationen kdnnea im nntvariaten Fafl okfat genOtzt werdea ^ 

Dargestellt sind in Fig. 3 die postsyn^tischen Poteotiale der Gegenwartskcunponenten der Zettreihen A 
^inks) and B (redits) fflr jedes Eingabemnster, Unt^ a. das faeiBt in doiobersten beiden Diagrammen wenten die 
Werte vor dem Dekoirdad(kisvorgang,d«» heifit bdzafiUliger Wahl der Ktodellparvneter inden Fmiktionsap- 
proximatoTen daigesteltt Da, wie zavor bereits er^^ttmt wizrde;^ im Ideaifal! i£e Funktionen einen 8-peak 
. reprtentxeren soOen ist die Blidcriditung auf die Diagramme T(»rgegebea Ste ist hier mit P bexddmet Es kann 
arkasnt werden^ dafi unter a sowohl cfie Zdtreihe A ond B sehrwdt streuea Unter b sind die Ergebmsse fUr 
univariate Dekorrelatbn dargcste&t Diese univariate Dekorrelation ist nidxt Gegeostand der erfindungsgemi- 
Ben Anordnung and des erfindimgsgemfiBen Lentverfalne&sL Sie (Sent ledigiicfa zur VeransdutuBdmng dts 
dnrcfa die Erfindong gegebenen tedmisdien Fortschritts. Unter c sind letztfidi die Ergefanisse fur Dekorrelation 
mit zwd Zettreihen. al&D iHvariate Deb^rrelation daigesteflt Deodich kann hier erkannt w^den, daB aus der 
Blk^riditong P betrachtet nahezu ein 8-peaks vorliegen. DeutEch kfinn^ audi gegenOber b die adimalerea 
Streobereidie der Kurven erkannt werden. Falls nan als Gedankenbet${»d unter c eine Knrve mit ibnllcber 
Streufareite vorilgei wie die unto: b fOr die Zeitrdhe A, so wOrde dies faedeuten, daB <£e zusStzlidi zur besseren 
Dekorrelatbn vt» Zdtreihe A gcwihlte ObservaWc aus webher die Zdtrdhc B gebildet wurde, kcme 
zus&tzSche Information filr das Lemai des Fonktionsapprodmators von A licfert £s sollte dso vorzngsweise 
eine andere Observable gew^hlt wenbn» welche zu emer Verbesserung des Dekorrdatioasergd>nisses ffifart 
Die dstaillierten Zusammenhlnge sind im nun folgenden matfaematisdien Eitiutenmgsteil wetter dargestellt 

Mathematisdier Erkl&rungstefl 

Im folgenden fassen wir audi das Gesamtmoddl als Netz auf und bezdcbnen entsprcdiend Bin- undAusgabe- 
werte als Naironea Falls mdits anderes erwAhnt vra^ 



Jedes enzetae Nearon dncs Netzes erredmet aas sdner mefardhnensionalen Bngabe v sdne Akdvienmg 
(Aosgabc) in zwti SchfilteiL Zonflcfast wird v nut eincin GcwichtsvelEtor oo skaiftrmulupliziert nnd nach dtKsn 
crstcn Vcrarbcstungssciiritt entstcht das postsynaptisdic Potential hz 

Das postsynaptiscke Poientmlh ist abo 
IQ der nkMinearen Ihuisferf onktion f wifd es auf das Ansgangspotiential V (Aktiviowg des Neunns) abgebildet: 

V.f(h)L (2) 

Hiarbdirtf dnebegeMge nkAtfineareFtokttonycBealwzwiacfaenOinid 1 faescfaiinktimdiiivei1iai»r»iL 
15 9olLMBetraclitluninitz.B.(fieagino^ 

20 

mitderAbleidiiig 

^ wobd der Pmn»tgradteStrigung mill damit den Bereich nahezalmjearer Abbikiimg gegenObq' nicMin^rer 
Obci u ageing bestLuiuL 

Wr betraditea mm spezldD dw NeuroiKn der Ausgabescbidit Die Dimeoson der Au^EabescUcl&t sei p. 
Erweiteit anf den allgemeiaen Fan mefarerer Neoronen 
mcfaidhnensiQaale Ehigangsdsnal des Netzes t; indc^^ 
30 Ausgmg. Dalier ist h dee de te r mmisU adie Fkmktion dcs ZafaOsvcktors & wobd h belldrige trirhrifnenre 
'ftansfonnationen enthaitcn kamu liegen wanfiBnh due oder mdurere nidttfineare Sdii diten zwisdien Hngahc- 
ond AiQgabesdikfair dann ftdh das Netz cinen aBgCT 

tionenzwiKj]eoEaxgabeSimdpost^3faa{rttsd^^ iri|id3i7.Bakannal5o 
etwas Ton dcT Eingaagau^bnoalion bd der 
35 <fiel¥ansin£onxia:tu}n IgV) zwisdien Ebi^^ 
v«rhullidct)bcrtragungzage«lfcbrietstm 

niert s md L m O ss c n wir zustofldi kQnstiidi e s Ratisdien z ndt Vertdhing v(z) am Agagan gsput e nd at V MazufOgen. 
WlrerfadteacfieA kiiv ieru ug enderAiisgangsnearonenYabdngizwdto 

wobd f dee mvertlerfaare TVacsEerfnoktion niitO<l^< ifOraHe Kanqionenten i » !• ... iP ist FQr <fie 
einzdnc&AiBgsQgsaktivienisgenhaben wir also 

Ncben den doidi de jemOigoi Gewidite vorgegdsoien 
nen 6 von Neuron zu Hemm unterscheidea Aiifj^o^ 

fidikdtsvertdbng ^<z) des adcSdven Rausdiens z hierbd befieU^ wobd z jedodi ds nnabbftigg von h 
sa angenonmien wird (die a^sniibsenkemeimtereioanderimabbinfl^^ 
sd dabd wie folgt deSidert: 

E(<l?>-<U>*)=llA, 

55 ■ 

wobdAdieRaiadistirkeeinescmEdnenAixsgabQi^ironsbezddai^ > M&tehnigflber<fie^Zi)-Vertgi- 
hmgbedeotet 
ZjgatzlidizarTirangnftmnafiottI(&V)zwi 
so don I(h» V) zwisdiea dem Pptental k end der AuBgabc. Untcr der VoragssetTwnSi daB kern HiigaiigSiagsdiea 
voriumden is^ dnd V) Ymd I(h, V) gIddL Daher kfi^^ 

nm cbn InfonnaticHistrander dies Netzwedces zu maximieren. Im Mgenden wofloi wir desbalb dnen ana^T^ 
sdien Ausdradc fOr I(h, V) hcridten, der nnr von dai adaptierbaren Nctzparamcteni afahingt (vgl [NP94]). Die 
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i 

Eingesetzt iB(12) ergibt ^ H(q}zo 

= -/n%«(A)fe/n'«**(&)WAft)-/b(ii)). (5j 



5 

HierbeiBt Q(V]h)^e bedingte Wahrscfadnfichkat vwYbei bdcanatemhundergjbt sidi gaiii0(5)zn: 
Q(V|h)-v(V-((li)^ (9) 

AIs resnltieroide AttsgangsyerteaungeriiaUman; lo 
ci(V)-rf(h)Q(Vjh)dli. (10) 

Aafgnind der AddhhritSt des Raoscfasns IlSt adi <fie lYansinfonnatioa I aud. ols Differaiz zwisdiea den 
Eatrapien der Ansgangg- and RauschveiteifaiiiseD darsteflea: 15 

I-H(q>-H(v)i (11) 

Der ersteTenn in(I I) ist die difierenddle Etatrqrie der Walirsdidnlidikdtsverteiluiig q: 

H(q)--/<j(V)Inq(V)dV. (12) 

Der zweite Tenn ia(l 1) hfiiigtintr von der Veteilungdes Rauschena ab: 

H(v)--f(2)Kv(2))dz. (13) 25 

Im FaB^ daB m ^) GaoBmtdlaiig ist, ist fl(vi} ^eidi % !n(23KA). Da cfie GanBverteSung die 

grSBte Entropie imter alien Verteilungen gcgebenw Varianz gOt 

Wenn also A geg«ii nail geht strdben die BnzelentrapieQ H(vi) gegen minus rnirandlirh. Es folgt daoOt daB 
damitaudi de gemdmame £atro{>te gegen mmus imemQich gefat Der rweite Term acs (1 1) strebt abo gegen 39 
oneadlidi. Von den boden GrdSen aus (11) ist fQr ints aber ledi^idi ^t]) von Infteresse, da sicii nor fUfH dutdi 
<fie Adaption von f fazvtr* der Gewichte bednflussen Ii8t Um die TVansmformaticn I zu maxnmsrsDf gilt e$ also, 
<fie Ausgangsentropie I^q) zu maxiffiierea FOr eine gegebene Rausdhst&te erzwingt <fiese Maximiemng der 
Entropie cSe Byefctivitlt der TVansfmnatton vcm ^ nach h, was ja genau onser Ziei war. Dies fblgt aus der 
Tatsache, daB Nftditb^efctivitfit eine niedrigere Entro|se nacfa sidi ziefat Warden meiirere Eingabewerte aitf 40 
gfeidie Ausgabewerte abgebildel; dann nimait (fie Unsidieriieit an Ausgabecode and datmt ai^ die Entn^e 
ab. IMese Argmsentation gOt allenSngs nor, w^ die Ausgan^transferfunktionen beschinkt sind Diese En- 
sdnranioing szchert zu, dafi <fie Ausgangsentropie mclil ad mfinitum erhdht werden bum, tndem der Bikibereicb 
der erzeugten Ajtsgabe gestredct vnri, Ab einem bestimmten Statfium Udbt dem Netz folgfidi m dner 
wdtereaErii^^imgder&itropieledi^shdasAfittdderB^ekti^ , 45 

Im Limes versdiwindenden Ransdiens Imt c&e Gf5fie H(q) einen en^ 
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Um die rcstBdien Ddta- InlegrBtionai ansf Qfarcn zu kOnneiir machen wir die SiAstkutzonea 
& — ^(^) als BSmk&nx TOD ) (^} 

mid 

undwirerhaltenschlieSOd) 

FQr die Entropie I1(q) inotd damit fOr den rdevanten TeO der Thuumfonnadcm I erhabea wtr soixut den 
Ausdmck 

wobei 

^(•inAo=/n«*«(»)'-s^. (5) 

DtwirO^^KlfSr alle i « 1, ^ axtgraaimiieii habeiip erfQIIt jcdes Fi de Vofaussctzang emer 
Wafarscfaeinfichkehsverteilimg (lotegradoa von — oo bis +oo ergibt sich zu eins). Damit kann man daan 
IX¥tiI^7ab KiillbBck'LeBrier^DislHnz zwisdiea der Fotemialverteikiiig 7 imd der Wabrschdzificfakett zsiSS^ 
8CD, <Se durcfa das Ptodokt der f i defoiert ist Ih^ 
angeoDiDmen wird, worn c&betdoi YerteOimgea(^^ 

Wir hahen (est: die Trensinfdrmalion ist bis airf dne Konstante (^egefaen durch die Raiiscfaentroptc) gidch 
miMB der Knllbac^-Leiblet^EHstanz zwiscfawi der Potentialverteiimig mid der Prodoktverteihpig, die dnrdi die 
AUtttungen der Traorfialuiiictiofleit dargestellt winL Marimiwupg der TVansinfaniMtTnn ist ftquivalatt Txsr 
Minindening der Kidlback^ieiU^^ 

*(*)=njs(*.) (5) 

\ 

enndi^dit einc Mudmiermig dor Obertrageaexi bifonnalKMi. Die qidmaieaTraiisferfanbioiien oseben scfa 
4fii TTB ff fnfai'h 

P<l^-Vi^fari-l,...ji (29) 

undbanneafOr jedes Nenrao aoaldilBgig von den anderec adjostiert werdeiL 
Faktorideraog der Vertdhmg da postsynapdoA 
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REDUNDANZMINIMIESUNG 



INFORMATIONSMAXmmmNG, (30) s 

onter der Voraussetzong; daB die IVansf erftmktbnen gemiS (29) optimal angepafit werdea 

Einige Bemerkungen: da wir von f\ zim§dist our Invertiert»riceh g^Dtdert faabea, tdme anch eice streng 
moaoton falle&de jPunktbn vak negativer Abidtung sSs Transfexftrnktion in Fkiage. In dea Glexdnmgen (15) bis io 
(29) wilre daim die aUgemetnere Fonn mit [Tl^H anstelle von f i((h^ zu verweoden und man cddeite ab 
alternative Usong fib- ^) Pi ^ — Ti. Wir w(£en ens aba* im foigemien auf die sigmoidc RmiEtioR aus (3) 
bescfarflnken^ so daB wir <fi<sea Fall ausscUiefien kdmi^ 

In der Badverarbeitang ist das Restdtat (29) snter dem Namea "Sampiing/Ifistogram EquaHzatioii' bekannt 
Es besag^ daB masdnide Inf onnatiocsabgtragnag bd miifonncr Ausgaug^vertdhmg — also bd der VerteSung t5 
maximaler Eatropxe errdcht w^den kann. 

PhysSca&sch gesehen &8t aidi dieses Ergebois Idciit plansibel nwdrffn: eine groBe Menge as Information wild 
Airrn gbertnig^ wesn das Hngangssignal am Ausgang wieder fein sufgddst werden kann. Bd Stid^yroben der 
cmpirisdi crmittdtai Votdhaig Ti^^ bcobacbtet man die mdstai StichprobOTrerte in der NShe der hi-Werte, 
fOr die groB ist Um £ese gut voneinando* trennen zu k5mien» mufi dort audi die Steiguog der Transfer- 20 
funktbn mdglidi$t groB sein. Versduedene Atsgangsw^ Hegen somit weit aiisrinanrfeT mtd kdnnen trotz 
Kavschens nodi imtersdieden werden. Hine mxtere Sdsraoke fur die Auflosung ist dabd dordi die vora 
Rauschen bcdingte ScaTiening am Ausgang gegebea Die Rausdistflrkei unendBch klein, d)er onglddi null, setzt 
also ein 1^ far (SeTrencscfadrfie der MormadoasObertragung. 

Nadidem wir im letztea Absdmitt gesdien haben, daB dn faktorieQer Code bd entspred^oder WabI der 25 
TVansferftmktionen mazimalen Informationstransfer garandert^ wollen wir nun aoch nodi <£e entgegengc^tzte 
Bkbtungzdgeo: Maximi«-ung der Trai^sinfbrmatiQn fOutzu einemfidctoridlen CodCpfaBs einsokdier existiaL 
Die Redundanz R Im Ausgd)e-Code; bedingt durdt Korreladonen zwisdien den dnzdnen Ausgabewerteo* hx 
de&iert als 

30 

« = (31) 
I 

FQr de dndimensu)nflien fiotropien Hfcg) und dEie mnlttjnwgfwjftTmlg ^itropie H(q) setzen wir jetzt den im 35 
letzten Absdmitt heigeicttetai Aurimck(26) fllr die dnzeheundSr die g em d n same Emropie dm 



Da <fie Redundanz Rimmcrmditaegatiy ist gSt mit 

i 

unddamit auch 

Bd den eiozdnen Summandoi von £jp| handelt cs sdi aber tedigfich am Knllbadc-Leibler^Distanzen, so daB 
audi diese die Bediiigung der Nxchtnegativitit erfiin 

^ ^ E^i ^ Ot - (35) 

i 

D 0 Y^Di ^ 0. (M) 
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Que Masdmiening tier Traoamformation I imd die damit verbundene Minfamerung der KoUback-Ldbler-Di- 
stanz D Transferbiiikfioiiea gegd^cncn Kjiten fOhrt also zmagslaufig zor Mimmkmng der R ed on da ir r, falls 
dn fisktoridler Code esdsdert In unserm ^pc^deQen Fall invertierbara* und bcscbrankter TVamf erfuirirtjonen, 
nicfat vDrhandenein TSi^gBTigg ra ^ s ^;!}!^ xsoA verscfawmdend geringeni» d. h. infinitednial fdeineiiia ab^ postthren 
Ati^[angsraascheii erfaahen wir zusanuncoi mh (30) das Haufyterseimis <£eses gesamtca Kapitels liber In6snsa- 
tiOfisverarbettaiig id ncuruiudcn Netzen: 

RBDUNDANZMINIMIEmiNG 
INFOBMATIONSMAXIMIBSUNG, (37) 

tmter der Vonrasietzang; daB dn faktoiieller Code eristic ^ dies nfdxt der Fall, dann soil die Potentialvertdr 
Initg waugsteos so veit wie mOgfich 
itartfielnfoniwtioTwmixinricningi^ 
ahrcrtdbmg 7 aU auchdie Transforfoi^^ 

Dieses Brgebnis bat due fundairontale Bedeutong fiir mdlberwadite LemveiWireii: die Eosteofonttkin 
mhmert adi anf den Mmiax-Tenn, d h. die KnBbadc-Ldbier-IMstMEg (2ej^ die das nenronale Netz mimniieren 
solL E$ tst viditig za bemerfanw daB das Msii^^ 
undcfieTranrfeifmiktimifii 6 aflge^ 

* 
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PitlcfttflfW'pfOche 

L Lcmvcrfafaren zur Nadibfldnng ernes dynamisriien Prozesses dordi gemeinsames Ericmen ypn nmide- 
stens zwel Zeitreaien, wekfae jew^ vmctdedfme ProzeSobservabie darstellen» 

a) bei dem ^de PirozeBobaervable dordi dncn Pi mktbittapp coK i uiator nanAgebfldet wirdL 

b) bet dem jedem Fui^ottaBpproximator ledig^ in d^ Vergangenheh: Se^nden Werte aBer Zdtro- 
beazor VerfQgtmg gesteOt werden^ 

c) bei dem die ernwJnen Werte eioer jewdDgen Zeitreihe an^gdEaftt werden ab mtt dner je Wert 
speziRsdien Wafanriidnfldrireitsvefteaung aoftretende ReaGsffinmgen eines stocbastisdien Prozese^ 
<^imdbddemzomTyaimngd€sFtanktionsapprQiHnat^ 

Gege nwartsw er t der ZMtreifae in Form eines A usg a bc OTTtesad^ 

niflt^ f Ijy A^i^hfiin ggffgidrttn ti gffie yilcli^ Rifitrtfrm ^^igt wirdj die fimherstdlt^ daB ^ Wahrsciiein- 

GdsJceitSTOteOung di^es An^abewertes der Wahrscbemlicbkdtsverteihmg aBer zttgefiifarta 

Werte optimal detordiert ist 
2 Verfabren nadi Anspmdi 1. bd dem aOe Vergangenbdiswerte d^ ZeitreBien identisch aosgegdiea 
werden. 

3. VerWiren nadi etnem der mangdsenden AnqnUdic^ bd dem anf die anszogebenden Werte dne 
diffe»nzitfbare Obertragoogsfonktion angewendet wirdl weldie ifanen dnen Wm zwisdiaL 0 nnd 1 
zuwdst, 

4. Verfabren nach emm der vmngehenden Ans^^e; bd dem die Zdt^^ 
ten PtozeSobservablen zngdfBfart wird» bllB nnt den ^ 

.ro6gfidtisti 

5* Verfabren nadi mm der vwastgehenden AnqirOdiei bd d 

am jeweBigcnFtmktk«isapproa dmato rftrfgwic Fi mktfanmai i in i er twird; 



?fflin^)'4n«nij^)Iaj^-y (7) 
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nnt: 

F; AbJeitiingdcr (fcertragun^unktiOT (8^ 

H: multufimen^onaies postsyn{q)dsches Potezitia{, bestebend aus alien Yergaogenlieitswertoi end den Sum- 
men von G^oiwartswertenmitdeaAasgaben der FunktionsappFoxiniatoren 

¥: muhicfimensonale Wahncbefflficfatceitsverteilong am Aasgang s 
D: KuIlback-LeiUer Distanz 

6. Verfahren nadi Anspnich 5, bd dem das Integral m Gldchung (7) durch f oigendai, ais Kosteofonktion zu 
mimnuerenden Term angendhert vird: 



10 



mit: 

M: Anzahl der Eingabennister 

G^: muhkfimendonales postsynapdsches Ptytential 

undbeidemfblgendeNibmmgb^nimwi^ lo 



'^(h')r=~ZZ (10) 

mit: 

:WlrfcldcrdenWertff" withilt 
ZZ: AnzaUder Punkteim WOrfel 
p: Anzablder Aiisgabewerte 

liKantenBUigedesWlifels , 30 

6w Lemanordnang zur Nachbfldung ernes dynandsdien Prozesses dnrch gemeinsames Eriern^ von minde- 
stens zwd Zettreiben, 'i^che jcwe^ versduedene ProzeBo^servable dars^en, 

a) bd der mmdestena erste und zwdte Furictionsaqyroariniationjapittd zur NadMdung des Zdtra"- 

bdtens der jeveSigen I^rozeSobservd}len vorgesdioi sin4 

b}bddemjed^Fisiktzon5approzimalonanittelledi^^ 35 
ZehreQien zugefOhrt ivmlen, 

c) mtd bd do* im jeweSgen Funktionsap p r ox imatiQnamittel dne AnsfSbrungsfiniktion ass einem der 

AnsjffOdie amgeffifart wird 
7« Lernanordmiog nach. Anapnidi 6^ bd der als Fimktionsapproximatioiismittel ein nemonales Netz vc^ge- 
sehenist ^ 



fflerzu 3 Sdtc(n) Zdcfingngen 
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